Gia đình ông định cư tại Thượng xá làng Yên Lương. Ông có ba bà phu nhân, chính thất được phong là Dương Thị Thục Nhân (Nguyễn Thị Thu) và hai bà kế thất đều phong là quận phu nhân. Ông có hai người con trai, trưởng nam là Yên Nghĩa Hầu Nguyễn Đình Đệ. Con trai thứ là Dương Võ Bá Nguyễn Đình Thủy.